GB∕T 37721-2019 信息技术 大数据分析系统功能要求

ID

C53C8988A5E241449602E43D6E150336

文件大小(MB)

1.21

页数:

20

文件格式:

pdf

日期:

2024-8-14

购买:

购买或下载

文本摘录(文本识别可能有误,但文件阅览显示及打印正常,pdf文件可进行文字搜索定位):

ICS 35.240,L 67,に :丒 ニニ^^^,年^^^,ドニ野:?ぎ—:三ー,中华人民共和国国家标准,GB/T 37721—2019,信息技术大数据分析系统功能要求,Information technology—Functional requirements for big data analytic systems,2019-08-30 发布2020-03-01 实施,国家市场监督管理总局关在,中国国家标准化管理委员会发布,GB/T 37721—2019,目 次,前言.. 111,范围 1,2规范性引用文件.1,3术语和定义.. 1,4 缩略语 1,5 总体要求. 2,6数据准备模块功能要求 2,6.1 数据抽取功能要求 2,6.2 数据清洗功能要求 2,6.3 数据转换功能耍求 3,6.4 数据加载功能要求 3,?分析支撑模块功能要求 3,7.1 查询功能要求. 3,7.2 机器学习功能要求 4,7.3 统计分析功能要求 4,7.4 可视化功能要求 .. 4,8数据分析模块功能要求 5,8.!分析模式 5,8.2 分析类型 6,9流程编排模块功能要求 6,9.1 工作流管理.6,9.2 告警和日志.6,附录A (资料性附录)SQL关键字 . 7,GB/T 37721—2019,刖 百,本标准按照GB/T 1.1-2009给出的规则起草,请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任,本标准由全国信息技术标准化技术委员会(SAC/TC 28)提出并归ロ,本标准起草单位:浪潮电子信息产业股份有限公司、中国电子技术标准化研究院、勤智数码科技股,份有限公司、杭州海康威视数字技术股份有限公司、浪潮软件集团有限公司、上海计算机软件技术开发,中心、新华三技术有限公司、天津南大通用数据技术股份有限公司、中兴通讯股份冇限公司、华为技术有,限公司、星环信息科技(上海)有限公司、北京百分点信息科技有限公司、北明软件有限公司、哈尔滨哈エ,大大数据通用技术有限公司、国网上海市电カ公司、陕西省信息化工程研究院、南京南瑞信息通信科技,有限公司、广州浪潮大数据研究有限公司、杭州中奧科技有限公司、科大讯飞股份有限公司,本标准主要起草人:苏志远、张东、赵江、卫凤林、张群、刘宇峰、李正、赵世范、黄先芝、王建华、,陈敏刚、刘振宇、蔡立志、潘子健、赵伟、孙卡、吴文峰、刘蔚、王东、赵华、符海芳、周洪明、孙伟、汪疆平、,王进宏、赵志强、王刚、王宏志、郭乃网、苏运、张勇、孙立华、汤宁、刘广庆、沈贝伦、陆韵、武新、张绍勇、,赵乾、李冰、尹卓、孙嘉阳,III,GB/T 37721—2019,信息技术大数据分析系统功能要求,1范围,本标准规定了大数据分析系统的数据准备模块、分析支撑模块、数据分析模块和流程编排模块的功,能耍求,本标准适用于大数据分析系统的设计エ开发和应用部署,2规范性引用文件,下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件.仅注日期的版本适用于本文,件。凡是不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件,GB/T 35295—2017信息技术大数据术语,3术语和定义,GB/T 35295—2017界定的以及下列术语和定义适用于本文件,3.1,大数据分析系统 big data analytic systems,在大数据存储和处理系统提供的原始数据和计算框架的基础上,集成了一系列数据分析生存周期,过程中所用工具的系统,3.2,结构化数据 structured data,存储在数据库里,可以用二维表结构表示的数据,3.3,非结构化数据 unstructured data,除了结构化数据之外的没有明确结构约束的数据,3.4,分布式执行计划 distributed execution plan,分布式场景下的SQL査询计划.需要根据数据分布特点将SQL拆分成多个切片及多个步骤,提供,调度给多节点并行执行,4缩略语,下列缩略语适用于本文件,API:应用程序编程接 口( Applicalion Programming Interface),GPU:图形处理器(Graphics Processing Unit),JSON :JS 对象标记(JavaScript Object Notation),OLAP:联机分析处理(On-Line Analytical Processing),REST:表述性状态转移(Representational State Transfer),GB/T 37721—2019,SQL:结构化査询语百(Structured Query Language),SSD:固态硬盘(Solid State Drives),XML:可扩展置标语言(Extensible Markup Language),5总体要求,本标准主要从以下4个方面对大数据分析系统的基本功能做出要求:,a)数据准备模块的功能要求:对原始数据进行预处理,使数据能被上层分析方法直接使用;,b)分析支撑模块的功能要求:提供建立数据模型和应用模型的算法库或者工具库;,c)数据分析模块的功能要求:提供数据分析方法或者中间件.将数据准备模块输出的数据以及数,据建模过程中产生的中间数据转变成知识或者决策;,d)流程编排模块的功能要求:按照工作流对数据处理生存周期的各环节进行编排,各模块间存在相互作用的关系,如图1所示,大数据分析系统框架,数据准数据分析模块,分析模式,离线数据,分析,流数据,分析,交互式,分析〇,分析支撑模块,查询 机器学习 统计分析,程排块,流编模,〇,图1大数据分析系统……

……